Phaseless Alignment Learning; PAL
FFの重みは現階層の応答rと一つ上の階層からのエラーシグナルrから行われる
$ {\dot{{{{{W}}}}}}_{\ell ,\ell -1}\propto {{{{\mathbf{e}}}}}_{\ell }\,{{{{\mathbf{r}}}}}_{\ell -1}^{T}
FBの重みは現階層のノイズと上の階層のノイズ相関から学習する
$ {\dot{B}}_{\ell ,\ell +1} = \eta_{\ell}^{\mathrm{bw}} \left\{ \boldsymbol{\xi}_{\ell} \left( \widehat{\mathbf{r}}_{\ell +1} \right)^T - \alpha B_{\ell ,\ell +1} \right\}
Naa_tsure.iconノイズの期待値(多くのノイズサンプルでの平均)を取ると、異なる層からのノイズは無相関で平均するとゼロになる一方、同じ層で異なる時間に発生したノイズは相関を持つ性質を利用している